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Verfahren zur Einrichtung einer Bewegung eines Handhabungsgerats 

und Bildverarbeitung 

5 Die Erfindung betrifft ein Verfahren zur Einrichtung einer Bewegung eines 
Handhabungsgerats mit insbesondere mehreren beweglichen Achsen und einer 
Steuereinheit, wobei Position, Zeit und Geschwindigkeit fur jede Achse vorge- 
geben werden kann. Vorteilhafterweise sind Bewegungsfreiheiten um mindes- 
tens drei Achsen moglich, um eine freie Anordnung im Raum zu ermoglichen. 
10 Wenn nur eine Bewegung in einer Ebene gewiinscht wird, sind auch Verstell- 
moglichkeiten um zwei Achsen ausreichend. Je nach Aufgabe des Handha- 
bungsgerats konnen aber auch mehr Achsen vorgesehen sein, die durch ent- 
sprechende Stellglieder verstellbar sind. Femer betrifft die vorliegende Erfin- 
dung eine entsprechende Bildverarbeitung. 

15 

Bei dem Handhabungsgerat kann es sich bspw. um einen Roboter handeln, 
wobei als Roboter ganz allgemein eine Vorrichtung zu verstehen ist, welche 
automatisiert Bewegungs- und/oder Arbeitsablaufe durchfuhren kann. Dazu 
weist der Roboter eine Steuerung auf, welche Stellbefehle an Stellglieder des 
20 Roboters ausgibt, damit diese die ihnen vorgegebenen Bewegungen ausfuhren. 
Um einen koordinierten Bewegungsablauf zu erhalten, ist es notwendig, dem 
Handhabungsgerat einen bestimmten Bewegungsablauf vorzugeben. 

Dies geschieht bei bekannten Robotern bzw. Handhabungsgeraten dadurch, 
25 dass in der Steuerung ein Programm ablauft, in dem der Bewegungsablauf des 
Handhabungsgerats von vome herein fest einprogrammiert ist. Derartige Hand- 
habungsgerate finden bspw. bei der Montage von Gegenstanden Verwendung, 
in denen die Handhabungsgerate immer wieder identische Bewegungsablaufe 
durchfuhren. 
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Ferner ist eine Steuerung fur ein Handhabungsgerat bekannt, die einen Bewe- 
gungsablauf anhand von Konstruktionsdaten, bspw. CAD-Daten, eines Objektes 
ermitteln kann. In diesem Fall kann die Bewegung des Handhabungsgerats sehr 
prazise auch an dreidimensionale Objekte angepasst werden, ohne dass eine 
5 aufwendige zusatzliche Vermessung der Objekte und eine Eingabe der entspre- 
chenden Bewegungskoordinaten in das Computerprogramm notwendig wird. 

Bei den bisher bekannten Verfahren zur Einrichtung einer Bewegung eines 
Handhabungsgerats, bspw. einer Roboterbewegung, besteht jedoch der Nach- 

10 teil, dass die Bewegungsablaufe bzw. die Konstruktionsdaten eines Gegens- 
tands vorher genau definiert und abgespeichert werden mussen. Um die Bewe- 
gung des Gegenstandes bspw. auf einem Forderband beriicksichtigen zu kon- 
nen, kann die Bewegung des Forderbandes durch entsprechende Bewegungs- 
sensoren mit erfasst werden. Dies ist vergleichsweise aufwendig und fuhrt dazu, 

15 dass das System nicht flexibel auf selbst bewegte Objekte oder unerwartete 
Vorfalle reagieren kann. 

Aufgabe der vorliegenden Erfindung ist es daher, eine einfache Moglichkeit zur 
Einrichtung der Bewegung eines Handhabungsgerates vorzuschlagen, mit der 
20 der Bewegungsablauf des Handhabungsgerats flexibel bspw. an die Bewegung 
eines zu bearbeitenden Objekts angepasst oder selbsttatig, d.h. ohne Eingriff 
von auflen, geandert werden kann. 

Diese Aufgabe wird durch ein Verfahren zur Einrichtung der Bewegung eines 
25 Handhabungsgerats, bspw. eines Roboters, mit mindestens einem mittels einer 
Steuerung um eine oder mehrere Achsen bewegbaren Stellglied gelost, bei dem 

a) der Steuerung des Handhabungsgerats oder einer Bildverarbeitung ein 
optisch erkennbares Objekt und ein auf das Objekt bezogener Bewegungsab- 
30 lauf vorgegeben wird, 
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b) der Bewegungs- und/oder Arbeitsbereich eines Handhabungsgerats mit 
mindestens einer Kamera aufgenommen wird, 

c) das aufgenommene Bild mit einer Bildverarbeitung derart ausgewertet 
wird, dass das vorgegebene Objekt erkannt und dessen Position und/oder Be- 
wegungszustand insbesondere relativ zu dem Handhabungsgerat bestimmt 
wird, 

d) die Steuerung Oder die Bildverarbeitung aus der Position und/oder dem 
Bewegungszustand des erkannten Objekts und dem auf das Objekt bezogenen 
Bewegungsablauf einen Steuerbefehl fur ein Oder mehrere Stellglieder des 
Handhabungsgerats berechnet, 

e) die Steuerung entsprechend dem Steuerbefehl einen Stellbefehl insbe- 
sondere an jedes zu bewegende Stellglied ausgibt, und 

f) die Verfahrensschritte b) bis e) emeut durchgefuhrt werden, insbesondere 
bis die Steuerung einen Stopp-Befehl erhalt. 

Mit dem erfindungsgemaUen Verfahren ist es daher moglich, fur ein optisch 
erkennbares Objekt abstrakt einen bestimmten Bewegungsablauf insbesondere 
relativ zum Objekt vorzugeben, der dann von der Steuerung des Handhabungs- 
gerats, insbesondere einem Computer, automatisch abgearbeitet wird. Das 
optisch erkennbare Objekt wird durch eine Konstellation von optisch erkennba- 
ren und durch eine Bildverarbeitung identifizierbaren Merkmalen definiert, bspw. 
geometrische Anordnungen, bestimmte Kontraste und/oder sonstiger zur Er- 
kennung geeigneter Merkmale. Dadurch ist es moglich, den Regelkreis zwi- 
schen dem insbesondere bewegten Objekt und dem Handhabungsgerat visuell, 
d.h. durch eine entsprechende Bildverarbeitung, zu schlieften und einem be- 
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wegten Objekt mit dem Handhabungsgerat zu folgen, ohne dass der Bewe- 
gungsablauf vorher bekannt sein und in die Steuerung des Handhabungsgera- 
tes einprogrammiert werden muss. 

5 Bezogen auf ein solches optisch erkennbares Objekt kann also in abstrakter 
Weise ein bestimmter Bewegungsablauf vorgegeben werden. Insbesondere ist 
es auch moglich, den Bewegungsablauf fur das Handhabungsgerat relativ zu 
einem selbst bewegten Objekt vorzugeben, d.h. insbesondere im Ruhesystem 
des Objekts, um bestimmte Aufgaben daran durchzufuhren. Die Vorgabe des 

10 Bewegungsablaufs kann bspw. darin bestehen, ein bestimmtes Objekt, welches 
in deflnierter oder unvorhersehbarer (chaotischer) Weise bewegt wird, durch die 
Bewegung des Handhabungsgerats zu verfolgen. Ferner ist es moglich, bspw. 
eine Kante oder Fuge durch Vorgabe eines bestimmten Kontrastwertes zu er- 
kennen und einen Roboter entlang dieser Fuge oder Kante zu fiihren. Diese 

15 Vorgabe ist abstrakt und muss nicht durch bestimmte Positionsdaten des Objek- 
tes erganzt werden, weil die Position des in dem aufgenommenen Bild erkann- 
ten Objekts relativ zu dem Handhabungsgerat immer wieder neu durch die 
Bildverarbeitung bestimmt wird. Damit konnen auch chaotische Bewegungen 
eines beliebigen Objekts oder unbekannte Objekte durch die Steuerung des 

20 Handhabungsgerats schnell und flexibel erfasst werden. 

Aus der relativen Position und/oder dem Bewegungszustand des Objekts und 
dem abstrakt vorgegebenen Bewegungsbefehl relativ zu dem Objekt errechnet 
die Steuerung oder Bildverarbeitung dann einen Steuerbefehl fur ein oder meh- 

25 rere Stellglieder des Handhabungsgerats, damit der abstrakte Bewegungsbefehl 
durch entsprechende Stellbefehle an jedes Stellglied tatsachlich in eine Bewe- 
gung des Handhabungsgerats umgesetzt werden kann. Der Stellbefehl fuhrt zu 
einer Bewegung des Handhabungsgerats, durch den in der Regel entweder die 
relative Position zwischen dem Objekt und dem Handhabungsgerat verandert 

30 wird oder das Handhabungsgerat in gleichbleibender Relativposition dem be- 
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wegten Objekt folgt. Eine neue Relativposition, bspw. aufgrund einer Bewegung 
des Objekts, wird entsprechend den vorbeschriebenen Verfahrensschritten 
erneut erfasst und in einen neuen Steuerbefehl umgesetzt. 

Diese Art der Einrichtung einer Bewegung eines Handhabungsgerats ist fur den 
Anwender besonders einfach, weil er sich nicht mit dem Steuerprogramm des 
Handhabungsgerats oder der Vorgabe bestimmter anzufahrender Positionen 
beschaftigen muss. Er kann das Handhabungsgerat lediglich durch die Vorgabe 
eines durch eine Bildverarbeitung erkennbaren Objekts und einer in Relation zu 
diesem Objekt abstrakt festgelegten Bewegung einsetzen. Damit ist der Roboter 
bspw. in der Lage, eine beliebig lange und beliebig geformte Nut selbsttatig zu 
verfolgen, ohne dass Positionsangaben dieser Nut eingegeben werden bzw. 
bekannt sein mussen. Dies fuhrt auch zu einer hohen Flexibility des Bewe- 
gungsablaufes, da der Roboter eigenstandig auch neuen Formen eines Objek- 
tes, bspw. einer unvorhergesehenen Abweichung im Verlauf der Nut oder dgl., 
oder einer nicht vorhersehbaren Eigenbewegung des Objektes folgen kann. 

Eine einfache Umsetzung des erfindungsgemafien Verfahrens sieht eine Bild- 
verarbeitung vor, die zusatzlich zu dem Erkenrien des Objekts auch die Berech- 
nung der Relativpositionen und/oder -bewegung zwischen Objekt und Handha- 
bungsgerat vomimmt und entsprechende Informationen als Steuerbefehle an 
die Steuerung des Handhabungsgerats weitergibt. Dann kann eine herkommli- 
che Steuerung fur Handhabungsgerate oder Roboter verwendet werden, die fur 
den Einsatz des erfindungsgemalien Verfahrens nicht angepasst zu werden 
braucht. Das visuelle Schiefcen des Regelkreises erfolgt in diesem Fall also 
durch die Bildverarbeitung selbst. 

Gemafi einer bevorzugten Ausfuhrungsform der vorliegenden Erfindung ist das 
Objekt selbst bewegt, wobei bei der Ermittlung des Bewegungszustands des 
Objekts dessen Ort und Geschwindigkeit erfasst werden. Insbesondere ist es 
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sinnvoll, Ort und Geschwindigkeit des Objekts relativ zu dem Handhabungsgerat 
zu bestimmen, so dass diese Relativbewegung besonders einfach bei dem 
durchzufuhrenden Bewegungsablauf, welcher abstrakt in Bezug auf das Objekt 
bspw. in dessen Ruhekoordinatensystem vorgegeben ist, beriicksichtigt werden 
5 kann. 

Dann ist es besonders einfach, die Bewegung des Objektes und die Bewegung 
des Handhabungsgerats zu uberlagern. Dies geschieht mit einer entsprechend 
angepassten Bildverarbeitung vorzugsweise in Echtzeit. Bei dieser Verfahrens- 

10 variante wird also die Objektbewegung bestimmt und mit einer bekannten oder 
aufgrund der Bildverarbeitung ermittelten Bewegung des Handhabungsgerats 
uberlagert. Dadurch wird es auch moglich, durch das Handhabungsgerat Arbei- 
ten am bewegten Objekt auszufuhren, wobei die Bewegung des Objekts 
und/oder die Bewegung des Handhabungsgerats vorher nicht vorgegeben sein 

15 mussen. Es ist jedoch auch moglich, dass der Bewegungsablauf des Handha- 
bungsgerats bspw. relativ zu dem Objekt in einem Programm der Steuerung 
vorgegeben ist. 

Das Verfahren kann auch fur die einfache Programmierung eines Handha- 
20 bungsgerats zur Einrichtung einer Bewegung des Handhabungsgerats bzw. 
Roboters verwendet werden, insbesondere wenn das Handhabungsgerat immer 
wieder dieselben Bewegungen ausfiihren soli. In diesem Fall wird der Bewe- 
gungsablauf als Folge von wahrend der Ausfuhrung der Bewegung ermittelten 
Steuerbefehlen insbesondere mit entsprechenden Zeitinformationen gespei- 
25 chert. Dann kann die Bewegung des Handhabungsgerats besonders einfach auf 
Grundlage dieser gespeicherten Folge von Steuerbefehlen in der gewunschten 
Abfolge und zu der vorgegebenen Zeit erfolgen. Das Abspeichem der Steuerbe- 
fehle insbesondere in ihrer zeitlichen Abfolge entspricht also der Erstellung 
eines Programms eines Handhabungsgerats zur Steuerung der dessen Bewe- 
30 gung, ist jedoch wesentlich einfacher zu handhaben als die Vorgabe bestimmter 
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Positionen oder das Einlesen von CAD-Daten, aufgrund derer die Bewegung 
dann berechnet wird. 

ErfindungsgemaB ist es auch moglich, mehrere verschiedene Bewegungsablau- 
fe als jeweils eine Folge von Steuerbefehlen abzuspeichern, die je nach Anwen- 
dungsfall beliebig ausgewahlt werden konnen. 

Dabei kann die Auswahl eines Steuerbefehls oder einer Folge von Steuerbefeh- 
len auch von der Art, der Position und/oder dem Bewegungszustand des er- 
kannten Objektes abhangen. Dieses Merkmal kann bspw. dazu verwendet 
werden, das Ende eines Bewegungsablaufs festzustellen, wenn eine bestimmte 
Konstellation optischer Merkmale ein bestimmtes Objekt erkennen lasst. AuBer- 
dem ist es dadurch moglich, bspw. bei einer Qualitatskontrolle abhangig von 
einem bekannten Fehler selbsttatig verschiedene Bewegungsablaufe eines 
Handhabungsgerats durchfiihren zu lassen, urn fehlerabhangige Korrekturen 
anzubringen. 

In einer besonders vorteilhaften Ausgestaltung des erfindungsgemalien Verfah- 
rens wird die Bewegung des Handhabungsgerats anhand der aufgenommenen 
Bilder kontrolliert. Insbesondere wenn die Bewegung des Handhabungsgerats 
auf Grundlage einer gespeicherten Folge von Steuerbefehlen erfolgt, kann 
dadurch einfach uberpruft werden, ob die Bedingungen fur die Durchfiihrung der 
gespeicherten Folge von Steuerbefehlen noch vorliegen, bspw. ob dem beweg- 
ten Objekt richtig gefolgt wurde. Wenn dies nicht der Fall ist, kann der Bewe- 
gungsablauf sofort gestoppt werden, bspw. urn Schaden an dem Objekt zu 
vermeiden. 

Zusatzlich ist es erfindungsgemali moglich, dem auf das Objekt bezogenen 
Bewegungsablauf von dem Handhabungsgerat wahrend der Bewegung auszu- 
fiihrende Aufgaben zuzuordnen. Die Art der Aufgabe kann dabei jede Tatigkeit 
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sein, die durch ein handhabungsgerat-gesteuertes Werkzeug durchgefiihrt 
werden kann. Dies konnen bspw. SchweilJarbeiten, das Abdichten einer Fuge, 
das Verfolgen von bewegten Gegenstanden oder sonstige Aufgaben sein. 

Dabei konnen die Aufgaben sowohl wahrend des Abarbeitens einer gespeicher- 
ten Folge von Steuerbefehlen im Rahmen einer programmgesteuerten Handha- 
bungsgerat-Bewegung als auch bei der Bewegung eines Handhabungsgerats 
aufgrund der jeweils aktuell erkannten Bilddaten durchgefuhrt werden. 

Es ist besonders vorteilhaft, wenn die Bildverarbeitung und die Berechnung des 
Steuerbefehls in Echtzeit erfolgt, urn auch bei bewegten Objekten bestimmte 
Aufgaben durchfuhren zu konnen und eine ziigige Bewegung des Handha- 
bungsgerats zu ermoglichen. In diesem Fall kann haufig auf eine Programmie- 
rung des Handhabungsgerats oder die Abspeicherung einer Folge von Steuer- 
befehlen verzichtet werden, weil das Objekt und/oder dessen Bewegung in 
Echtzeit erkannt wird und somit auch die Ermittlung der Steuerbefehle in Echt- 
zeit erfolgen kann. Dadurch konnen vorhandene Handhabungsgerate sehr 
flexibel fur die verschiedensten Aufgaben eingesetzt werden. Die Verarbeitung 
der aufgenommenen Bilder in Echtzeit ermoglicht es insbesondere, Manipulati- 
onen an bewegten Objekten durchzufuhren, bei denen sowohl der Bewegungs- 
ablauf fur die Manipulationen als auch die Bewegung des Objekts in Echtzeit 
ohne vorherige feste Programmierung durchgefuhrt wird. Wenn die zeitliche 
Abfolge der durchzufuhrenden Manipulationen bzw. Aufgaben oder Arbeiten 
bereits bekannt ist, wird nur die Bewegung des Objekts in Echtzeit erfasst und 
mit der Bewegung des Handhabungsgerats uberlagert. 

Die Bildaufnahme kann erfindungsgemaft durch eine stationare oder eine mit 
dem Handhabungsgerat mitbewegte Kamera erfolgen. Die stationare Kamera- 
einheit hat den gesamten Arbeits- und Bewegungsbereich des Handhabungsge- 
rats im Blick und. kann daherauch unvorhergesehene Ereignisse besonders gut 
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erfassen, bspw. chaotische Bewegungen des zu verfolgenden Objektes. Die mit 
der Bewegung des Handhabungsgerats mitgefuhrte Kameraeinheit kann dage- 
gen auf einen speziellen Arbeitsbereich fokussiert werden und bietet gegeniiber 
der stationaren Kameraeinheit eine hohere optische Auflosung. 

Besonders vorteilhaft ist daher auch die Kombination einer stationaren und einer 
mitbewegten Kamera, wobei durch die Bildverarbeitung bspw. zwei Oder mehre- 
re Bilder gleichzeitig insbesondere auch in Echtzeit ausgewertet werden kon- 
nen, urn einen Steuerbefehl zu errechnen. Je nach Aufgabe konnen auch zwei, 
drei oder mehr stationare und/oder bewegte Kameras vorgesehen sein. So kann 
das Verfahren auch dann eingesetzt werden, wenn Objekte unvorhergesehener 
Weise aus dem Blickfeld der mitbewegten Kamera fahren oder fallen. Diese 
Objekte konnen dann mit der stationaren Kamera erfasst und das Handha- 
bungsgerat so gefuhrt werden, dass das Handhabungsgerat dieses Objekt 
weiter verfolgt. 

Durch das erfindungsgemalie Verfahren zur Einrichtung der Bewegung von 
Handhabungsgeraten wird die Handhabung von Manipulationsgeraten und 
deren Anpassung an bestimmte Aufgaben und Tatigkeiten also erheblich verein- 
facht, weil die in der Regel aufwendige Programmierung eines Handhabungsge- 
rateprogramms mit einem oder mehreren fest vorgegebenen Bewegungsablau- 
fen entfallt. Dies erhoht die Flexibility beim Einsatz von Handhabungsgeraten, 
wie bspw. Robotem. 

Femer betrifft die vorliegende Erfindung eine Bildverarbeitung, welche insbe- 
sondere zur Durchfuhrung des Verfahrens zur Einrichtung einer Bewegung 
eines Handhabungsgerats geeignet ist. Durch die Bildverarbeitung werden ein 
mittels mindestens einer Kamera aufgenommenes Objekt in einem Bild erkannt, 
die Position des Objektes raumlich und zeitlich bestimmt und/oder dessen Ge- 
schwindigkeit ermittelt, eine Relation der Position und/oder der Geschwindigkeit 
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des Objektes zu der Position und/oder Geschwindigkeit eines Handhabungsge- 
rates bestimmt und diese Relation an die Steuerung des Handhabungsgerates 
bspw. in Form eines Steuerbefehls weitergegeben, um das Handhabungsgerat 
dem Objekt nachzufuhren Oder an dem Objekt bestimmte Aufgaben oder Mani- 
5 pulationen durchzufiihren. Dies geschieht moglichst in Echtzeit und ermoglicht 
es, das Handhabungsgerat aufgrund der visuellen Erkenntnisse der Bildverar- 
beitung zu steuern. 

Die dafur benotigte Relation zwischen Objekt und Handhabungsgerat kann aus 
10 der Differenz zwischen den Positionen und/oder Geschwindigkeiten von Objekt 
und Handhabungsgerat gebildet werden, insbesondere in Form eines Abwei- 
chungsvektors und/oder eines Relativgeschwindigkeitsvektors, welcher dann 
der Steuerung zugefuhrt wird. Dabei kann die Differenz der Steuerung unmittel- 
bar zugefuhrt werden, welche aus der Differenz die entsprechenden Steuerbe- 
15 fehle erzeugt. In einer alternativen Ausgestaltung kann die Bildverarbeitung die 
festgestellten Differenzen in Steuerbefehle umwandeln, welche der Steuerung 
zugefuhrt werden, die dann nur noch die konkreten Stellbefehle fur die Stellglie- 
der des Handhabungsgerats erzeugt. 

20 Um einen Bewegungsablauf aufzuzeichnen, konnen die oder mehrere Kame- 
ra(s) uber dem Objekt positioniert und bei einer Bewegung des Objekts nachge- 
fuhrt, die Kamerabewegung aufgezeichnet und diese Aufzeichnung in Bewe- 
gungsinformationen fur das Handhabungsgerat umgerechnet werden. Auf diese 
Weise kann ein Bewegungsprogramm fur ein Handhabungsgerat besonders 

25 einfach erzeugt werden, indem ein durch die Bildverarbeitung erfasstes Objekt 
bei dessen Bewegung an die verschiedenen Positionen kopiert wird. Dabei 
enthalten die Bewegungsinformationen vorzugsweise zeitliche, raumliche 
und/oder Geschwindigkeitsinformationen. 
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Weitere Merkmale, Vorteile und Anwendungsmoglichkeiten der Erfindung erge- 
ben sich auch aus der nachfolgenden Beschreibung eines Beispiels und der 
Zeichnung. Dabei bilden alle beschriebenen und/oder bildlich dargestellten 
Merkmale fur sich oder in beliebiger Kombination den Gegenstand der Erfin- 
dung, unabhangig von der Zusammenfassung in den Anspruche oder deren 
Riickbezugen. 

Es zeigen: 

Fig. 1 schematisch die Durchfuhrung des erfindungsgemafJen Verfah- 

rens zur Einrichtung der Bewegung eines Handhabungsgerates 
bei einem ruhenden Objekt und 

Fig. 2 schematisch die Durchfuhrung des erfindungsgemafcen Verfahren 

zur Einrichtung der Bewegung eines Handhabungsgerates bei ei- 
nem bewegten Objekt. 

Fig. 1 zeigt als Handhabungsgerat einen Roboter 1 mit mehreren, um verschie- 
dene Achsen bewegbaren Stellgliedern 2, an denen als bewegter Sensor eine 
Kamera 3 angeordnet ist. Zusatzlich zu der Kamera 3 konnen an dem Roboter 1 
auch beliebige Werkzeuge angebracht sein, die in Fig. 1 jedoch nicht dargestellt 
sind. 

Das Bildfeld 4 der mitbewegten Kamera 3 ist auf das Objekt 5 ausgerichtet. In 
einer Steuerung 6, die in dem dargestellten Beispiel unmittelbar an dem Roboter 
1 angeordnet ist, jedoch ohne weiteres auch separat von diesem in einer Re- 
cheneinheit ausgebildet sein kann, und/oder einer in derselben oder einer sepa- 
raten Recheneinheit hinterlegten Bildverarbeitung sind Erkennungsmerkmale fur 
das Objekt 5 und ein auf das Objekt 5 bezogener Bewegungsablauf 7 vorgege- 
ben. 



WO 2005/039836 



PCT/EP2004/01 1863 



In dem dargestellten Beispiel soli der Roboter 1 der Kante 8 des Objektes 5 
folgen, urn die Kante 8 bspw. auf Fehlstellen zu uberpriifen Oder mittels eines 
nicht dargestellten Werkzeugs Arbeiten an der Kante 8 durchzufuhren. Dazu 
sind der Bildverarbeitung der Kamera 3 Merkmale zum Erkennen der Kante 
vorgegeben, bspw. ein typischer Kontrastverlauf Im Berelch der Kante 8. Mit der 
Kamera 3 werden der Bewegungs- bzw. Arbeitsbereich des Roboters 1 aufge- 
nommen und das aufgenommene Bild mit der Bildverarbeitung ausgewertet. 
Dabei werden das Objekt 5 identifiziert, dessen Position relativ zu dem Roboter 
1 bestimmt und auch die Kante 8 erkannt, welcher das Handhabungsgerat auf 
Basis des abstrakt vorgegebenen Bewegungsablauf 7 folgen soil. 

Aufgrund der bekannten Relativposition zwischen Kamera 3 bzw. Roboter 1 und 
der Kante 8 des Objektes 5 kann die Steuerung 6 bzw. die Bildverarbeitung 
einen Steuerbefehl fur die Stellglieder 2 des Roboters 1 berechnen und als 
Stellbefehl entsprechend an jedes Stellglied 2 ausgeben, so dass das Handha- 
bungsgerat 1 der Kante 8 des Objektes 5 folgt, ohne dass der Bewegungsablauf 
durch Vorgaben von Koordinaten in der Steuerung 6 fest einprogrammiert sein 
muss. Dazu nimmt die Kamera 3 nach jeder erfolgten Bewegung des Roboters 1 
erneut ein Bild des Objektes 5 auf und wiederholt die vorbeschriebenen Verfah- 
rensschritte. Dadurch ist es moglich, einen abstrakten, auf das Objekt 5 bzw. 
bestimmte visuelle Merkmale des Objekts 5 bezogenen Bewegungsablauf 7 
vorzugeben,. dem der Roboter 1 selbsttatig folgt. 

Dabei ist es besonders vorteilhaft, wenn das vorbeschriebene Verfahren durch 
eine Bildverarbeitung der Kamera 3 realisiert wird, welche die entsprechenden 
Steuerbefehle bspw. in Form von Bewegungskoordinaten an die Steuerung 6 
des Roboters 1 ubertragt, urn dort nur noch die jeweiligen Stellbefehle an die 
Stellglieder 2 zu generieren. In diesem Fall konnen herkommliche Roboter 1 
Oder andere Handhabungsgerate mit herkdmmlichen Steuerungen 6 verwendet 
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werden, so dass das erfindungsgemalie Verfahren einfach durch eine entspre- 
chende Bildverarbeitung implementiert werden kann. 

Zusatzlich zu der mitbewegten Kamera 3 kann auch eine stationare Kamera 9 
vorgesehen sein, die ein groReres Bildfeld 4 aufweist als die mitbewegte Kame- 
ra 3 und dazu dient, das Objekt 5 im Uberblick zu erfassen. Vorzugsweise ist 
auch die Kamera 9 mit der Bildverarbeitung der Kamera 3 und/oder der Steue- 
rung 6 des Roboters 1 verbunden. 

Das Vorsehen einer stationaren Kamera 9 ist besonders sinnvoll, wenn das 
Objekt 5, wie in Fig. 2 dargestellt, selbst bewegt ist. Die Bewegungsrichtung 10 
des Objektes 5 wird in Fig. 2 durch Pfeile angezeigt. Die stationare Kamera 9 
dient einer ersten Orientierung des Objektes 5 relativ zu dem Roboter 1 . Auf- 
grund des grofteren Bildfeldes 4 der stationaren Kamera 9 im Vergieich zu'der 
an dem Roboter 1 angebrachten Kamera 3 ist es einfacher, das Objekt 5 zu 
finden, zu identifizieren und unvorhergesehene Bewegung des Objektes 5, 
bspw. ein Verrutschen auf einem Transportband, schnell und zu zuverlassig zu 
erfassen. Die genaue Identifikation bestimmter Merkmale des Objektes 5 kann 
dann mit der mitbewegten Kamera 3 erfolgen. 

In dieser Verfahrensvariante wird nicht nur die Position des Objektes 5, sondern 
auch dessen Bewegungszustand relativ zu dem Roboter 1 bestimmt. Aufgrund 
dieser Informationen ist es moglich, das Handhabungsgerat 1 entsprechend 
dem vorgegebenen Bewegungsablauf 7 entlang der Kante 8 des Objektes 5 zu 
fuhren, wobei die Steuerung 6 fur die Stellbefehle der Stellglieder 2 von vorn- 
herein die Bewegung des Objektes 5 mit berucksichtigt. 

Mit dem Verfahren und der Bildverarbeitung ist es also einfach moglich, die 
Bewegung eines Handhabungsgerates 1 in Bezug auf ein Objekt 5 einzurichten, 
ohne dass dem Handhabungsgerat genaue Bewegungskoordinaten vorgegeben 
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werden miissen, da das Objekt 5 visuell erkannt wird. Daher ist es moglich, 
aufgrund einer Auswertung des Bildes die Bewegung des Roboters 1 flexibel 
und schnell zu steuern und anzupassen. 
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Bezugszeichenliste: 



1 


Handhabungsgerat, Roboter 


2 


Steliglied 


3 


Kamera 


4 


Biidfeld 


5 


Objekt 


6 


Steuerung, Bildverarbeitung 


7 


Bewegungsablauf 


8 


Kante 


9 


Kamera 


10 


Bewegungsrichtung des Objekts 
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Patentans pruche : 



1. Verfahren zur Einrichtung der Bewegung eines Handhabungsgerats (1) 
mit mindestens einem mittels einer Steuerung (6) urn eine oder mehrere Achsen 
bewegbaren Stellglied (2), bei dem 

a) der Steuerung (6) des Handhabungsgerats (1) oder einer Bildverarbeitung ein 
optisch erkennbares Objekt (5) und ein auf das Objekt (5) bezogener Beweg- 
ungsablauf (7) vorgegeben wird, 

b) der Bewegungs- und/oder Arbeitsbereich des Handhabungsgerats (1) mit 
einer Kamera (3, 9) aufgenommen wird, 

c) das aufgenommene Bild mit einer Bildverarbeitung derart ausgewertet wird, 
dass das vorgegebene Objekt (5) erkannt und dessen Position und/oder Bewe- 
gungszustand insbesondere relativ zu dem Handhabungsgerat (1) bestimmt 
wird, 

d) die Steuerung (6) oder die Bildverarbeitung aus der Position und/oder dem 
Bewegungszustand des erkannten Objekts (5) und dem auf das Objekt (5) 
bezogenen Bewegungsablauf (7) einen Steuerbefehl fur ein oder mehrere Stell- 
glieder (2) des Handhabungsgerats (1) berechnet, 

e) die Steuerung (6) entsprechend dem Steuerbefehl einen Stellbefehl an jedes 
zu bewegende Stellglied (2) ausgibt, und 

f) erneut die Verfahrensschritte b) bis e) durchgefuhrt werden. 
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2. Verfahren nach Anspruch 1, dadurch gekennzeichnet, dass das Objekt 
(5) selbst bewegt ist und bei der Ermlttlung des Bewegungszustands des Ob- 
jekts (5) dessen Ort und Geschwindigkeit erfasst werden. 

3. Verfahren nach Anspruch 1 oder 2, dadurch gekennzeichnet, dass die 
Bewegung des Objektes (5) und die Bewegung des Handhabungsgerats (1) 
uberlagert werden. 

4. Verfahren nach einem der Anspruche 1 bis 3, dadurch gekennzeichnet, 
dass der Bewegungsablauf (7) als Folge von wahrend der Ausfuhrung der Be- 
wegung des Handhabungsgerats (1) ermittelten Steuerbefehlen gespeichert 
wird. 

5. Verfahren nach Anspruch 4, dadurch gekennzeichnet, dass die Bewe- 
gung des Handhabungsgerats (1 ) auf Grundlage einer gespeicherten Folge von 
Steuerbefehlen erfolgt. 

6. Verfahren nach Anspruch 4 oder 5, dadurch gekennzeichnet, dass 
mehrere verschiedene Bewegungsablaufe (7) als jeweils eine Folge von Steu- 
erbefehlen abspeicherbar sind. 

7. Verfahren nach elnem der vorhergehenden Anspruche, dadurch ge- 
kennzeichnet, dass die Auswahl elnes Steuerbefehls oder einer Folge von 
Steuerbefehlen von der Art, der Position und/oder dem Bewegungszustand des 
erkannten Objekts (5) abhangt. 

8. Verfahren nach einem der vorhergehenden Anspruche, dadurch ge- 
kennzeichnet, dass die Bewegung des Handhabungsgerats (1) anhand der 
aufgenommenen Bilder kontrolliert wird. 
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9. Verfahren nach einem der vorhergehenden Anspruche, dadurch ge- 
kennzeichnet, dass dem auf das Objekt (5) bezogenen Bewegungsablauf (7) 
von dem Handhabungsgerat (1) auszufuhrende Aufgaben zugeordnet sind. 

10. Verfahren nach einem der vorhergehenden Anspruche, dadurch ge- 
kennzeichnet, dass die Bildverarbeitung und/oder die Berechnung eines Steu- 
erbefehls in Echtzeit erfolgt. 

11. Verfahren nach einem der vorhergehenden Anspruche, dadurch ge- 
kennzeichnet, dass die Bildaufnahme durch eine stationare und/oder eine mit 
dem Handhabungsgerat mitbewegte Kamera (9, 3) erfolgt. 

12. Bildverarbeitung, insbesondere fur ein Verfahren zur Einrichtung der 
Bewegung eines Handhabungsgerats (1) nach einem der Anspruche 1 bis 11, 
bei der ein mittels mindestens einer Kamera (3, 9) aufgenommenes Objekt (5) in 
einem Bild erkannt wird, die Position des Objektes (5) raumlich und zeitlich 
bestimmt und/oder dessen Geschwindigkeit ermittelt wird, eine Relation der 
Position und/oder der Geschwindigkeit des Objektes (5) zu der Position 
und/oder Geschwindigkeit eines Handhabungsgerates (1) bestimmt wird und 
diese Relation an die Steuerung (6) des Handhabungsgerates insbesondere zur 
Ausfuhrung eines auf das Objekt (5) bezogenen Bewegungsablaufs (7) weiter- 
gegeben wird. 

13. Bildverarbeitung nach Anspruch 12, dadurch gekennzeichnet, dass die 
Relation aus der Differenz zwischen den Positionen von Objekt (5) und Hand- 
habungsgerat (1) gebildet wird, insbesondere in Form eines Abweichungsvek- 
tors. 

14. Bildverarbeitung nach Anspruch 12 oder 13, dadurch gekennzeichnet, 
dass die Relation aus der Differenz zwischen den Geschwindigkeiten von Objekt 
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(5) und Handhabungsgerat (1) gebildet wird, insbesondere in Form eines Rela- 
tivgeschwindigkeitsvektors. 

15. Bildverarbeitung nach einem der Anspriiche 12 bis 14, dadurch gekenn- 
zeichnet, dass die Kamera (3, 9) Qber dem Objekt (5) positioniert und bei einer 
Bewegung des Objekts (5) nachgefuhrt, die Kamerabewegung aufgezeichnet 
und diese Aufzeichnung in Bewegungsinfonnationen fur das Handhabungsgerat 
(1 ) umgerechnet werden. 

16. Bildverarbeitung nach Anspruch 15, dadurch gekennzeichnet, dass 
Bewegungsinfonnationen zeitliche, raumliche und/oder Geschwindigkeitsinfor- 
mationen enthalten. 



